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요 약 


일 반 적 으로 피 부 색 과 유사한 칼 라 가 포 함 된 복잡한 배 경 으로부터 미리 정 의 된 단일 칼라 임 계 값 을 이용해 
얼굴 영 역 을 정확하게 추 출 하는 것은 매우 어렵다. 이에, 본 연 구 에 서는 초기 피부색 범 위 를 점 진 적 으로 확 장 시 
키 면 서 얼굴 영 역 을 추 출 하는 방 법 을 제 안 한 다. 초기 피부색 범 위 는 인 터 넷 에 서 의 다양한 영 상 으로부터 얼굴 
영 역 의 피부색 분 포 를 분 석 하여 매우 밀 집 되어 나타나는 범 위 로 선 정 한 다. 피부색 범 위 를 확 장 함에 따라 
영상 공 간 에 서 의 얼굴 후보 영 역 도 확 장 되어 나타나는데, 확장 단 계 별 로 확 장 된 얼굴 후보 영 역 이 실제 얼 굴 임 
을 검 중 하기 위해 얼 굴 의 모 양 정 보 와 얼굴 기 관 의 위 치 적 정 보 를 사 용 한 다. 모양 제 한 자 로 는 타 원 의 특 성 과 
외 접 사 각 형 (60400108 60×) 의 가 로 와 세 로 의 비 율 을 사 용 한 다. 얼굴 기 관 으 로 는 눈 과 입 만 을 사 용 했는데, 
얼굴 후보 영역 내 부 의 가로 방 향 성 을 가지는 경 계 가 주로 눈 과 입 의 영 역 임 에 착 안 한 것으로서 비교적 
수 월 하 게 추 출 할 수 있기 때 문 이 다. 실 험 을 통해, 제안한 방 법 이 하 이 라 이 트 2181110100 에 의해 얼굴 영 역 의 
일 부 가 왜 곡 된 경 우 와 얼굴 영 역 이 피 부 색 과 유사한 배 경 에 인 접 해 있는 경 우 에 대해서도 강 인 하게 얼굴 
영 역 을 추 출 할 수 있 음 을 확인할 수 있었다. 
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본 연 구 는 한 국 과 학 재단 목 적 기 초 연 구 (2000-2-30300-002- ㆍ 신 
3) 지 원 으로 수 행 되었음. 
” 한 국 전 자 통 신 연구원 정 보 보 호 기 술 연 구 본부 생 체 인 식 기 술 디지털 방송, 웹 의 발 전 으 로 내 용 기반 이미지 검 
연구팀 연구원 색 , 비디오 인덱싱, 비디오 검색 등 의 시 스 템 들이 많 


"준회원, 부 산 대 학 교 컴 퓨 터 공학과 박 사 과정 : 
『 종 신 회원, 부 산 대 학 교 컴 퓨 터 공학과 교수 이 연구, 개 발 되 고 있 다 [1.2]. 특허, 검 색 에 있어서 사 


람 을 키 워 드 로 하는 요 구 가 많이 발 생 하고 있으며 
[3], 이를 위한 시 스 템 이 요 구 되고 있다. 정 지 영 상 및 
동 영 상 에서 사 람 의 얼 굴 에 관한 연 구 는 크게 얼굴 
영역 추출, 얼굴 영역 추적, 얼굴 인 식 으로 나뉘며, 
얼굴 추적 및 인식 시 스 템 의 정 확 성 은 얼굴 영역 추 
출 의 결 과 에 좌 우 된 다. 대 부 분 의 얼굴 영역 추출 시 
스 텔 에서는 얼 굴 의 모양 정보, 얼굴 기 관 의 위 치 적 
정보, 질감, 모양, 움직임, 칼라 등 의 얼굴 특 징 들을 
이 용 하 고 있 으 며 [4-7], 전체적인 구 성 은 이런 여러 
가지 얼굴 특 징 들을 조 합 하 여 그림 1 과 같은 처리 
과 정 으로 이루어진다. 먼저, 피부색 등 의 톡 징 을 이 
용하여 칼라 영 상 에서 얼굴 영 역 일 가 능 성 이 있는 
후보 영 역 을 추 출 하고, 각 각 의 후보 영 역 에 대해 얼 
굴 인지 검 중 하 는 과 정 을 거쳐 얼굴 영 역 을 추 출 하 게 
되는데, 검증 과 정 에 사 용 되 는 특 징 으 로 는 얼굴 형 
태 , 얼굴 기 관 들의 위 치 적 인 관계, 얼굴 영 역 의 질감 
동이 사 용 된다. 이때, 얼굴 후보 영 역 에는 얼굴 영역 
이 항상 포 함 되어 있으며 얼굴 영 역 은 배 경 과 분 리 되 
어 있다고 가 정 한 다. 


얼굴 후보 영역 추출 과정 
(피부색, 얼굴 모델 등 이용) 
얼굴 검 중 과정 
(얼굴 기관, 얼굴 질감, 얼굴 모델 등 이용) 


그림 1. 얼굴 영역 추출 시 스 템 의 일반적인 절차 


108 1281 와 36080 피 680014] 는 칼라 영 상 에 서 
얼굴 영 역 을 추 출 하 기 위해 0608 칼라 공 간 을 710 
칼라 공 간 으로 변 환 한 후 ｌ 성 분 만 을 이용해 얼굴 후 
보 영 역 을 선 택 하였다. 이 후보 영 역 들 중에서 얼굴 
영 역 만 을 추 출 하기 위해 8(71.0(60806 8187-16\81 
0606006006) 4131 에 기반한 얼 굴 의 질 감 을 이용하 
여 얼굴 영 역 을 추 출 하였다. 이 방 법 은 비교적 높은 
정 확 도 를 가 지 지 만 추 출 할 \1000\ 의 크 기 를 영 상 에 
무 관 하게 정 하 기 가 힘들어 다소 얼 굴 의 크 기 를 제한 
하였으며, 1 성 분 만 으로 얼굴 후보 영 역 을 추 출 하는 
방 법 으 로는 정확하게 배 경 과 얼 굴 이 분 리 되 지 않는 
경 우 가 발생할 수 있다. 2417480 '\1 와 02180 (2160 
[5] 은 실 험 을 통해 피부색 분포 모 델 (90470 0010 
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065601604100 000681) 과 머 리 색 분포 모 델 (621 0010 
019600041000 ㅁ ㅁ 0081) 을 만들고, 이 두 모 델 을 이용하 
여 칼라 영 상 에서 얼굴 영 역 과 머리카락 영 역 에 대한 
이 진 영 상 을 생 성 한다. 또한 다섯 가 지 의 얼굴 템플릿 
(6600201866) 을 미리 정 의 하 고, 얼 굴 과 머리카락 후보 
영 역 들 에서 61229 0204600-10181(01008 8180 ㅁ [007 을 통 
해 얼굴 영 역 올 추 출 한 다. 이들은 정면 얼 굴 이 외 의 
얼굴 영 역 도 추 출 하 는 성 능 을 보였지만, 염색 등 으로 
인한 다양한 머 리 색 18 00107) 및 머리 모 양 (68 ㅠ 
96516) 을 정 의 하 기 가 힘들다. 80000068 와 버 [8916] 는 
#0)2 칼 라 공 간 을 15 칼라 공 간 으로 변 환 한 후, 
146 와 580178007 정 보를 이 용 하 는 데 , 피 부 색 으로 미 
리 정 의 된 브와 5 영 역 을 만 족 하 는 화 소 들 을 얼굴 후 
보 영 역 이라 한다. 칼라 정 보 에 의해 구 해 진 후보 영 
역 돌 은 얼 굴 의 타원 모양 특 성 을 이용해 얼굴 영 역 임 
을 결 정 한 다. 이후 이들은 추 출 된 얼굴 영 역 으로부터 
눈 과 입 의 얼굴 특 징 을 추 출 하는 방 법 을 제 안 했다. 
이들이 제안한 방 법 은 얼굴 영 역 과 배 경 이 병 합 되 어 
후보 영 역 으로 나오는 경 우 에는 적 용 하기 힘들고, 얼 
굴 의 타원 모양 특 성 만 으 로 는 얼굴 후보 영 역 들 중에 
서 얼굴 영 역 이 외 의 모든 영 역 을 제 거 하는데 한 계 가 
있기 때문에 단순한 영 상 을 실 험 에 사 용 했다. ㅁ #0\16\ 
[7] 는 신 경 망 에 기반한 방 법 을 사 용 했 다. ㅁ 0\16 는 
혹 백 의 입력 영 상 을 64[6681001108 한 후, 94168010118 
된 각 각 의 영 상 을 일정한 크 기 의 \1000\ 단 위로 분 
리 하 여 신경망 필 터 (81162) 를 거친다. 필 터 를 거친 얼 
굴 후보 영 역 들 중에서 중 첩 되 는 영 역 을 병 합 하 고, 
얼 굴 이 아닌 잘못 추 출 된 영 역 을 제 거 하는 과 정 을 
거쳐 정확한 얼굴 영 역 을 추 출 하 게 된다. 이 방 법 은 
정 면 을 바 라 보 는 얼굴 영 상 에만 적 용 하였다. 
앞에서 살펴본 여러 방 법 들 에서 얼굴 영 역 을 추출 
하는 첫 단 계 로 피부색 정 보 를 많이 사 용 했는데, 이 
것은 사 람 의 피 부 색 이 영상 내의 다른 많은 개 체 들 과 
잘 구 별 되 기 때 문 이 다 . 피부색 영 역 의 칼라 분 포 를 
통 계 적 으로 관 찰 해 보면, 밝 기 를 배제한 색 상 공 간 에 
서 좁은 범 위 에 분 포 함 을 알 수 있 다 [4.5.8,14]. 그러 
나, 복잡한 배경, 조명, 화 장 (02366 142), 하이라이트, 
잡 영 등 으로 인해 미리 정 의 된 단일 칼라 임 계 값 을 
이 용 하 여 얼굴 영 역 과 비 얼굴 영 역 으로 구 분 하 는 
것 으 로 는 보다 정확한 결 과 를 얻기 힘 들 다 [16]. 만약, 
그림 2(3) 와 같이 칼 라 에 의한 분할 결 과 로 써 얼굴 
영 역 의 일 부 만 이 추 출 되거나 그림 206) 와 같이 피부 
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색 과 유사한 비 얼굴 영 역 과 병 합 되어 추 출 되었을 
경우, 이후 검증 단 계 의 모 양 이나 질감 등 의 특 징 에 
기반한 작 업 에서 정 확 성 을 보장 할 수가 없 다 [91. 


(6) 피 부 색 과 유사한 배 경 이 있는 얼굴 영 상 과 얼굴 영역 
추출 결과 


그림 2. 단일 칼라 임 계 값 에 의해 잘못 분 활 된 결과 


이에, 본 논 문 에서는 미리 정 의 된 단일 칼라 임계 
값 에 의한 초기 칼라 분할 결 과 에 의 존 하지 않고, 피 
부 색 일 가 능 성 이 높은 부 분 부터 점 진 적 으로 피부색 
범 위 를 확 장 하는 과 정 을 반 복 하면서 얼굴 영 역 을 추 
출 하 는 방 법 을 제 안 한 다. 이때 각 확장 단 계 에서 얼 
굴 후보 영 역 에 대해 얼굴 영 역 임을 판 단 하기 위하여 
얼 굴 의 모양 정 보 와 얼굴 기 관 의 위 치 적인 정 보 를 
이용한다. 모양 제 한 자 로 는 얼 굴 에 대한 타원 모 델 과 
외 접 사 각 형 (60400108 503) 의 가 로 와 세 로 의 비 율 을 
사 용 하였다. 얼굴 기 관 으 로 는 얼굴 영 역 에서 주로 가 
로 방 향 의 경 계 화 소 로 추 출 할 수 있는 눈 과 입 올 사 
용 했는데, 이것은 얼 굴 의 크 기 가 작은 경 우 에도 쉽게 
추 출 할 수 있기 때 문 이 다. 눈 과 입 에 대한 일반적인 
위 치 적 관 계 에 대한 템 플 리 트 를 이 용 하 여 얼굴 영역 
을 최 종 적 으로 검 중 하 였다. 이에 따라, 본 논 문 에서 
제안한 방 법 은 피 부 색 과 유사한 배 경 이 얼굴 영 역 과 
인 접 해 있는 경 우 와 하 이 라 이 트 (4014040) 에 의해 
얼굴 영 역 의 일 부 가 왜 곡 된 경 우 에도 강 인 하게 얼굴 


영 역 을 추 출 할 수 있었다. 

본 논 문 의 구 성 은 다 음 과 같다. 2 장 에서는 피부색 
범위 확 장 에 의한 얼 굴 의 후보 영 역 을 결 정 하는 방법 
에 관해 설 명 하고, 3 장 에서는 각 후보 영 역 이 실제 
얼굴 영 역 인 지 를 검 중 하 는 방 법 에 관하여 설 명 한 다. 
4 장 에서는 실 험 결 과 롤 분석 및 토 의 하고, 끝 으로 5 장 
에서 본 논 문 의 결 론 을 맺는다. 


2. 얼굴 후보 영역 결정 
2.1 피부색 분석 및 피부색 범위 확장 


칼라 영 상 에서 영역 분 할 을 할 때 칼 라 는 아주 유 
용 한 정 보 이 다. 따라서 얼굴 영역 추출 및 인식 분야 
에서는 얼굴 후보 영 역 을 분 리 하 기 위해 칼라 정 보 를 
많이 사 용 한 다. 칼라 정 보 를 활 용 하기 위해 피부색 
분 포 를 분석해 보면, 밝기 성 분 을 제외한 색채 공간 
에서 좁은 범 위 에 군 집 하 여 분 포 하 고 있 음 을 알 수 
있다. 이러한 현 상 은 인 종 에 무 관 하 게 적 용 할 수 있 
다는 것이 밝 혀 졌 다 [10]. 이러한 피부색 특 성 을 활용 
하기 위해, 먼저 008 영 상 을 밝기 정 보 와 두 개의 
색채 정 보 로 분리 할 수 있는 (과 같은 칼라 
공 간 으로 변 환 한 다. 한편, 7067 칼라 공간 외에 
8, 71@, 05148, 정 규 화 된 ㅠ 공간 등 이 시스템 
특 성 에 따라 사 용 되 기도 한다. 

본 논 문 에서는 피부색 범 위 를 시 각 적 으로 균 등 하 
게 확 장 시키기 위해 균일 칼라 모 델 인 (Ｌ4^2 를 사 
용 하 였다. 그림 3 은 인 터 넷 에 서 임의로 획 득 한 100 개 
의 영 상 에서 얼굴 영 역 만을 180 칼라 공 간 상 에 나타 
낸 것이다. 여 기 에 서 알 수 있듯이, 피 부 색 은 좁은 


그림 3. Ｌ86 칼라 공 간 에 서 의 피부색 분포 


범 위 에 퍼 크 (0680) 를 가지고 군 집 되어 나 타 남 을 확 
인 할 수 있으며, 이러한 칼라 특 성 은 기 본 적 으로 얼 
굴 영 역 과 비 얼굴 영 역 을 구 분 하는 기 준 으로 활용할 
수 있다. 그러나, 앞서 말한 조 명 등 의 여러 가지 이유 
때문에 미리 정 의 된 단일 칼라 임 계 값 을 이 용 하 여 
얼굴 영 역 과 비 얼굴 영 역 으로 구 분 하 는 방 법 은 보다 
정확한 얼굴 영역 추출 결 과 를 얻기 힘 들 다 [9,16]( 그 
럼 2). 

그림 4 는 얼굴 영 역 을 추 출 할 때 칼라 공 간 에서 
단일 칼라 임 계 값 을 사 용 하는 것의 문 제 점 과 피부색 
범 위 를 점 진 적 으로 확 장 하 는 방 법 의 타 당 성 을 보이 
기 위한 개 념 도 이다. 


버 08 1068 = 
그림 4. 칼라 공 간 에 서 의 피부색 범위 설정 개념도 


여 기 에 서 , 가 로 축은 Ｌ86 칼라 공 간 에 서 8 값 을, 세 
로 축 은 6 값 을 나타낸다. 칼라 영역 ( 가 ) 는 그림 3 에 서 
피 크 로 나타나는 얼 굴 일 확 률 이 높은 칼라 범 위 를 
표 시 한 것이다. 칼라 영역 ( 나 ) 와 ( 다 ) 는 앞에서 언급 
한 여러 가지 요 인 에 의해 피 부 색 이 왜 곡 되 어 나타나 
는 것을 표 시 한 것이다. 이러한 왜 곡 된 피 부 색 은 칼 
라 영역 ( 나 ) 와 같이 칼라 영역 ( 가 ) 와 일 부 가 중 첩 되 
어 나타날 수도 있고, 칼라 영역 ( 다 ) 와 같이 동 떨 어 
져 나타날 수도 있다. 칼라 영역 ( 라 ) 는 이러한 왜곡 
된 칼라 영 역 도 포 함 할 수 있도록 크게 설 정 한 것이 
다. 영 상 에서 얼굴 영 역 을 추 출 하기 위하여 칼라 영 
역 ( 라 ) 에 서 와 같은 넓은 범 위 의 칼 라 를 피 부 색 으로 
사 용 하면, 칼라 영역 ( 나 ) 또 는 ( 다 ) 와 같이 왜 곡 된 피 
부 색 범 위 에 속하는 얼굴 영 역 도 모두 추 출 할 수 있 
다. 그러나, 칼라 영역 ( 나 ) 나 ( 다 ) 에 속 하 면서 피부색 
과 유사한 칼 라 로 구성된 배경 영 역 도 함께 추 출 하는 
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문 제 점 이 있다. 이러한 경 우 에, 기 존 의 일반적인 방 
법 들 [4-6,14] 에 서는 얼굴 기 관 의 기하학 정 보 를 이용 
하여 잘못 추 출 된 배경 영 역 을 제 거 하는 후 처 리 방법 
을 사 용 하고 있다. 그러나, 이러한 후 처 리 방 법 은 배 
경 영 역 이 얼굴 영 역 과 병 합 되어 나타나는 경 우 에 는 
제대로 적 용 할 수 없는 한 계 가 있다. 

한편, 칼라 영역 ( 가 ) 와 같이 좁은 칼라 영 역 을 피 
부 색 범 위 로 설정할 경 우 에 는, 칼라 영역 ( 나 ) 에 속 하 
는 얼 굴 의 일 부 분 만 이 추 출 되거나 칼라 영역 ( 다 ) 에 
속하는 얼굴 영 역 을 추 출 할 수가 없다. 

이와 같이, 피부색 칼라 범 위 를 고 정 시켜 얼 굴 을 
추 출 하는 방 법 을 사용할 경 우 에 는, 고 정 된 범 위 를 나 
타 내기 위한 임 계 값 의 설 정 이 매우 어렵다. 따라서, 
피부색 범 위 를 고 정 시켜 사 용 하 기 보다는 주어진 영 
상 에 따라 그림 4 의 칼라 영역 ( 가 ) 와 ( 라 ) 사 이 에서 
적 웅 적 으 로 피부색 범 위 를 설정할 필 요 성 이 있다. 

이에, 본 논 문 에서는 얼 굴 일 가 능 성 이 높은 칼라 
영역 ( 가 ) 에 속하는 화 소 로 구성된 초기 얼굴 후보 
영 역 을 영 상 에서 구한 후, 이 영 역 을 확 장 시켜 가면 
서 얼 굴 을 추 출 하는 방 법 을 제 안 한 다. 영 역 을 확 장 해 
나가기 위해서, 그림 3 의 피크 범 위 에 해 당 하는 칼라 
영역 ( 가 ) 로 설정된 초기 피부색 범 위 (6660 169100 
아 9040 00!0) 를 점 진 적 으로 넓 혀 가면서, 초기 얼굴 
후보 영 역 에 이 웃 해 있는 추 가 되는 화 소 들을 병 합 해 
나가는 방 법 올 사 용 한 다. 즉 , 초기 피부색 범 위 를 나 
타 내는 3, 6 값 의 범 위 를 점 진 적 으로 확 장 해 가면서, 
영 상 에 서 의 초기 피 부 색 을 포 함 하고 있는 범 위 를 확 
장해 나간다. 이때, 확 장 된 얼굴 후보 영 역 과 피부색 
과 유사한 배경 영 역 을 구 분 하 기 위해 얼 굴 의 모양 
정보 및 얼굴 기 관 ( 눈 과 입 ) 의 공 간 적 인 구성 정 보 롤 
사 용 한 다. 

그림 5 는 피부색 범위 확 장 에 의해 얼굴 후보 영역 
을 결 정 하는 과 정 을 나타낸다. 502) 는 원시 영 상 이며, 
5(6) 는 그럼 4 의 칼라 영역 ( 가 ) 에 속하는 초기 얼굴 
후보 영 역 이 다. 5(0) 는 칼라 영역 ( 가 ) 를 기 준 으로 피 
부 색 범 위 를 점 진 적 으로 넓 혔 을 때, 이 확 장 된 피부 
색 범 위 에 속하는 화 소 들을 나타낸 것이다. 영 상 에서 
초기 얼굴 후보 영 역 (그림 506)) 에 인접한 화 소 들만 
을 병 합 하기 위해 그림 5(0) 의 연결 요소 중에서 초기 
얼굴 후보 영 역 을 포 함 하지 않는 연결 요 소 들 을 제거 
한 결 과 가 500) 이 다. 각 각 의 확장 단 계 에 서 그림 500) 
와 같은 얼굴 후보 영 역 들이 추 출 되고, 이 후보 영역 
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(8) 원시 영상 (6) 초기 얼굴 후보 (0) 영역 확 장 의 결과 
영역 


(0) 초기 피 부 색 을 포 함 하고 
있는 확 장 된 영역 


그림 5. 피부색 범위 확 장 에 의한 얼굴 후보 영역 결정 


(6) 얼굴 특징 정 보 에 의해 
추 출 된 얼굴 영역 


들 각 각 이 얼 굴 인지 검 중 하는 후 처 리 과 정 을 통해 그림 
5(6) 에 서 와 같은 정확한 얼굴 영 역 을 추 출 하게 된다. 

이러한 피부색 범위 확장 방 법 에 의해 그림 4 의 
( 나 ) 에 속하는 왜 곡 된 칼 라 의 얼굴 영 역 도 추 출 할 수 
있다. 그러나, 심하게 왜 곡 되어 얼굴 영 역 의 칼 라 가 
그림 4 의 ( 다 ) 와 같이 분 포 되어 있는 경 우 에 는, 초기 
얼굴 후보 영 역 이 형 성 되지 않기 때문에 추 출 할 수가 
없다. 이와 같이 얼굴 영 역 의 칼 라 가 매우 왜 곡 된 경 
우 에 는 피 부 색 을 기 반 으로 한 접근 방 법 으 로는 해결 
하 기 가 어렵다. 


2.2 초기 얼굴 후보 영 역 의 확장 종결 조건 


피부색 범위 확장 방 법 에 있어서, 영 상 에서 초기 
얼굴 후보 영 역 의 결 정 과 함께 영역 확 장 의 종결 조 
건 (6600108000 000010402) 또한 중 요 하다. 본 논 문 에 
서는, 영역 확 장 의 종결 조 건 으로 다음 두 가지 조건 
을 사 용 한 다 . 

첫째, 피부색 범위 확 장 이 초기 얼굴 후보 영 역 과 
의 공 간 적 인 인 접 성 을 고 려 하면서 이 루 어 지 므로, 더 
이상 고려할 초기 얼굴 후보 영 역 이 없을 때 종 결 한 
다. 초기 피부색 범 위 에 의해 추 출 된 초기 얼굴 후보 
영 역 은 연 결 요소 레 이 블 링 12060108) 과 정 을 거쳐 초 
기 얼굴 후보 영역 리 스 트 를 형 성 한 다. 어떤 확 장 된 
영 역 이 얼 굴 로 검 증 되어 추 출 되면, 이 영 역 에 속하는 
연 결 요 소 는 초기 얼굴 후보 영역 리 스 트 에 서 제 거 하 
게 된다. 초기 얼굴 후보 영역 리 스 트 의 연결 요 소 가 
모두 제 거 되었을 경 우 에는, 영역 확 장 을 종 결 한다. 

둘째, Ｌ80 칼라 공 간 에 서 피부색 범위 확 장 을 할 


때 2 와 6 의 최대 범 위 에 대한 임 계 값 을 설 정 하 고 이 
를 초 과 했을 경우 종 결 한다. 설정된 8 와 6 의 최대 임 
계 값 을 넘어선 칼 라 는 피 부 색 일 가 능 성 이 아주 희박 
하기 때 문 이 다. 


3. 얼굴 특 징 에 의한 얼굴 영역 결정 


피부색 범 위 를 점 진 적 으로 확 장 할 때 얼굴 영 역 뿐 
만 아니라, 팔 과 손 영역 그리고 피 부 색 과 유사한 배 
경 또한 후보 영 역 으로 추 출 된 다 (그림 50)). 이렇게 
잘못 추 출 된 얼굴 이 외 의 영 역 을 제 거 하기 위해 일반 
적 으 로 눈 , 눈 썸 , 코 , 입 과 같은 얼굴 기 관 들의 기하학 
적인 정보, 얼 굴 의 질감, 템 플 리트 매칭, 주성분 분석 
등 의 얼굴 검 중 과 정 을 거치게 된다. 본 논 문 에서는, 
피부색 범위 확 장 에 의한 다 수 의 얼굴 후보 영 역 들 이 
얼굴 영 역 인지 검 증 하기 위해 얼 굴 의 모양 정 보 와 
얼굴 기 관 의 공 간 적 인 위치 정 보 를 이용한다. 


3.1 얼 굴 의 모양 정 보 에 의한 비 얼굴 영역 제거 


얼 굴 은 타원 모 양 으로 근 사 화 될 수 있 으 며 [6], 이 
런 얼 굴 의 타원 특 성 은 얼굴 영 역 과 비 얼 굴 영 역 을 
결 정 하는데 사 용 되 어 진다. 제안한 방 법 에서는, 타원 
모양 분 석 을 할 때 2 차 모 멘 트 (2 ㅁ ㅠ 070601) 를 사 용 하 지 
않고, 간단한 타원 모양 서 술 자 (06800007)115] 를 사 
용하여 팔 , 다리, 유사 배경 영역 등과 같은 불필요한 
영 역 을 제 거 하였다. 또한, 얼굴 너 비 와 길 이 의 비가 
일 정 하다는 연 구 결 과 [12] 에 근 거 하 여 얼굴 후보 영 
역 의 너 비 와 길 이 의 비도 사 용 하 였다. 

먼저 피부색 범위 확 장 에 의한 영 상 에 서 의 각 연 
결 요 소 에 대한 외 접 사 각 형 (60400108 00※) 을 그림 6 
과 같이 계 산 한 다. 외 접 사 각 형 의 가 로 를 \, 세 로 를 
트 연결 요 소 의 총 화소 개 수 를 6, 이 라 하고, 5, 중에 
서 식 (1) 을 만 족 하 는 타원 내 부 의 화소 수 를 6; 라 
한다. 얼굴 영 역 임을 결 정 하 기 위한 매 개 변 수 (0308- 
10666) 및 매 개 변 수 의 범 위 는 식 (2)~(4) 와 같이 제 
한 하 고, 이 모양 제 한 자의 조 건 에 위 배 되 는 영 역 은 
얼굴 후보 영 역 에서 제 외 한 다. 식 (21~(4) 에 서 의 범 
위 는 실 험 적 으로 구한 것이며, 특히 식 (2) 에 서 \ 가 
트 보다 클 수 있도록 하한 범 위 를 0.9 로 정한 것은 
모 자 를 쓴 얼 굴 도 고려해 주기 위한 것이다. 이 식 들은 
순 서 대 로 적 용 하 였는데, 이것은 간단한 연 산 에 의해 
제 거 가 가능한 것들을 신속히 배 제 해 주기 위 함 이다. 


(*- 지 02, (9-30" 

2 + 1 10 (1) 
21= 274, 0.9 흐 2, 즈 2.5 (2) 
20 52791, 0.8 흐 > 츠 1 (3) 
28 952/7006, 0.8 흐 여 흐 1 (4) 

"1 


그림 6. 모양 제 한 자 


이렇게 얼 굴 의 모양 제 한 자의 조 건 에 부 합 되는 영 

들은 얼 굴 일 가 능 성 이 아주 높은 영 역 들 이 지 만, 이 
런 모양 정 보 만 으 로 는 정확한 결 과 를 얻을 수 없다. 
따라서 얼 굴 의 모양 특 성 을 만 족 하 는 영 역 들 중 얼굴 
영 역 을 최 종 적 으로 결 정 하기 위해 얼굴 기 관 의 공간 
적인 위치 정 보 를 사 용 하는데, 얼굴 후보 영역 내에 
서 가로 방 향 으로 퍼져 분 포 하는 경계 화 소 들의 위치 
적 정 보 를 이 용 하 여 최종 얼굴 영 역 을 결 정 한 다. 


3.2 얼굴 기 관 의 공 간 적 인 위치 정 보 에 의한 얼굴 
영역 결정 


일 반 적 으로 칼라 영 상 에서 눈 , 코 , 입 등 의 얼굴 
기 관 을 추 출 하기 위해서 각 기 관 의 칼라 정보 또는 
밝기 정 보 를 이 용 한 다 .[4.6.9,14] 그러나, 얼굴 영 역 의 
크 기 가 작 거나 영 상 이 선 명 하지 않은 경우 칼라 또는 
밝기 정 보 를 이 용 하 여 눈 , 코 , 입 등 의 얼굴 기 관 올 
정확하게 추 출 하기 어렵다. 이에, 본 논 문 에서는 상 
대 적 으로 잘 추 출 되는 눈 과 입을 얼굴 기 관 으 로 사용 
하며, 이들을 추 출 할 때 얼 굴 내의 경계 정 보 를 이용 
한다. 칼라 채 널 별로 8066! 경 계 연 산 자 를 이 용 하 여 
경계 성 분 값 을 구 하 되 , 수직 성 분 의 경 계 요 소 값 만 올 
이 용 하 여 식 (5) 와 같이 칼라 영 상 에 서 의 경계 성분 
값 을 구한다. 수직 성 분 만 을 이용하는 것은 코나 얼 
굴 외 곽 선과 같이 세로 방 향 으로 나타나는 것은 배제 
하고 주로 가로 방 향 으로 나타나는 눈 과 입 올 추 출 하 
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기 위한 것이다. 이때, 현 재 까 지 확 장 된 영역 내 부 에 
속하는 가로 방향 경 계 만 을 눈 과 입 에 대한 경계 후 
보 화 소 로 간 주 한 다 (그럼 7(0),00). 


2=1 재 0, + 60 + 자 , (5) 


(3) 원시 영상 (06) 가로 및 세로 (0) 가로 방향성 경계 


방향성 경계 


(6) 가로 및 세로 ({) 가로 방향성 경계 
방향성 경계 


그림 7. 얼굴 영 역 에서 경 계 의 분포 


(0) 원시 영상 


얼굴 영 역 에서 얼굴 기 관 은 특정한 위 치 에서 존재 
하게 되 는 데 [12], 얼굴 후보 영 역 의 너 비 에 대한 비율 
로 각 기 관 의 위 치 가 결 정 된 다. 그러나 여러 가지 요 
인 에 의해 얼굴 너 비 의 비 율 에 의해 계 산 된 눈 과 입 
의 템 플 릿 ((607213[6) 은 실제 얼굴 영 상 에 서 눈 과 입 
의 위 치 와 정확하게 일 치 하지 않지만, 눈 과 입 의 공 
간 적인 위치 관 계 는 그대로 유 지 한 다. 따라서, 얼굴 
후보 영 역 의 너 비 의 비 율 로 계 산 된 눈 과 입 의 템플릿 
을 생 성 하 여 얼굴 후보 영 역 을 이 동 해 ( ㅠ 8 ㅁ 8519407) 
나 가 면 서 템 플 릿 에 속하는 경계 화 소 의 개 수 가 최대 
인 위 치 를 찾는다. 이때 템 플 릿 에 속하는 화 소 의 개 
수가 얼굴 후보 영 역 에 속하는 전체 경계 화 소 들의 
80% 를 넘을 경 우 에 얼 굴 로 결 정 한 다. 

한편, 실제로 얼굴 영 역 에서 가로 방향 경 계 가 분 
포 하 는 부 분 은 눈 과 입 외에 코나 눈 썸 , 얼 굴 의 윤곽 
선 (000 ㅁ 10047) 일 부 도 포 함 된다. 눈 과 입 의 템 플 릿 에 
속하는 경 계 의 비 율 을 높이기 위해서 얼굴 후보 영역 
의 윤 곽 선 주 변 의 경 계 는 눈 과 입을 나타낼 가 능 성 이 
적기 때문에 제 거 한 다 . 

또한, 얼굴 기 관 의 경계 화 소 들이 가지는 좌우 대칭 
성도 이용한다. 얼굴 기 관 의 경계 화 소 들을 수 직 방 향 으 
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로 투 영 하여 히 스 토 그 램 을 만든 다음, 식 (6) 에 의한 
3 차 모 멘 트 를 이용해 히 스 토 그 램 의 대 칭 성 을 구한다. 


(0 = 험 (.-0%000 6) 


그림 8 은 얼굴 기 관 의 위 치 적 관 계 를 이 용 해 서 얼 
굴 영 역 임을 결 정 하 는 과 정 을 보여준다. 그림 82) 는 
3.1 절 의 모양 제 한 자의 조 건 에 부 합 되 는 최종 얼굴 
후보 영 역 을 나타내며, 얼굴 후보 영 역 에서 수평 방 
향 으로 퍼 져 있는 모든 경계 화 소 만을 나타낸 것이 
806) 이 다. 그림 8(0) 에 서 처 럼 후보 영 역 의 너 비 의 비 
에 의해 눈 과 입 의 템 플 릿 을 구한 후, 템 플 릿 의 위치 
： 적 관 계 를 고 정 시키고 후보 영역 내 를 이 동 해 나가면 
서 눈 과 입 의 사각형 안에 속한 경계 화 소 들의 개수 
가 최 대 일 때 를 조 사 한 다 . 그림 8(0) 는 눈 과 입 의 템 
플 릿 에 속하는 경계 화 소 들의 개 수 가 최 대 일 때 의 
그 럼 이다. 그림 800) 의 템플릿 내에 속하는 경계 화소 
의 개 수 가 그림 806) 의 경계 화 소 의 80% 가 넘을 때 
얼 굴 로 결 정 한 다. 


(8) 06) 
수 
(0) (0) 


그림 8. 경 계 의 위 치 적 정 보 에 의한 얼굴 영역 결정 


4. 실험 및 토의 


본 논 문 의 실 험 에서는 웹 에 서 무 작 위 로 획 득 한 정 
면 얼 굴 을 포함한 영상 150 매 와 실 험 실 에서 칼라 
(0 카 메 라 를 이 용 하 여 획 득 한 60 매 의 영 상 을 입력 
영 상 으로 사 용 하 였다. 표 1 은 영 상 을 세 가지 형 태 로 
나누어 비 교 한 것이다. 한편, ( ㄷ Ｌ88 칼라 공 간 에 서 
8, 0 값 은 각각 1260/67667 와 76110\/)01046 칼라 성 분 올 


나 타 낸 다 [111. 따라서, 퍼 부 색 은 붉 은 색 성 분 을 반영 
하는 3 값 에 더 민 감 하 므로, 퍼 부 색 범 위 를 확 장 할 때 
6 값 보다 3 값 을 미 세 하게 증 가 시킴으로써 좀더 정확 
한 결 과 를 얻을 수 있다. 먼저 & 타 입 은 아무런 제한 
을 두지 않고 웹 에서 획 득 한 150 매 의 영 상 이고, ㅁ 8 
타 입 은 4 타입 중에서 편향된 칼라 조 명 에 의해 심 하 
게 왜 곡 된 영 상 이나 얼 굴 이 40 도 이상 기 울 어 진 영상 
은 제외한 것이며, 타 입 은 실 험 실 에서 획 득 한 영상 
이다. & 타 입 의 경우 다소 떨어지는 성 공 률 을 보이 
나, 8 타 입 의 영 상 들은 다소 향상된 결 과 를 얻을 수 
있었다. 또한 <: 타 입 과 같이 실 험 실 의 특성상 다소 
제한된 환 경 ( 일 정한 조명, 적당한 얼굴 크기, 적당한 
기 울 어 짐 등 ) 에 서 획 득 한 영 상 의 경 우 는 어느 정도 
만족할 만한 결 과 를 보였다. 


표 1. 얼굴 영역 추출 결과 


161 


144 


표 2 는 영 상 내의 사람 수 에 따른 얼굴 영역 추출 
결 과 를 보여준다. 와 (: 타 입 의 영 상 을 한 사 람 이 
있는 영 상 과 두 사람 이 상 이 있는 영 상 으로 분 류 한 
후 실 험 하였다. 한 사 람 이 있는 영 상 의 얼굴 추 출 률 
이 두 사람 이상 있는 영 상 보다 다소 좋게 나 타 났 지 
만, 이는 6 타 입 의 영상 대 부 분 이 한 사 람 이 존 재 하 
기 때 문 으로 보인다. 따라서, 결 과 에서처럼 영 상 내 의 
사람 수 에 는 민 감 하지 않게 반 응 함 을 볼 수 있다. 

그림 9 는 영상 내에 얼 굴 이 하나 존재할 경우 얼굴 
추출 결 과 를 보여준다. 그림 903)-(0) 는 배 경 이 피부 
색 과 유사한 경우, 모 자 를 착 용 한 경우, 하이라이트 
때문에 단일 임 계 값 으 로 는 정확히 추 출 하기 힘든 경 
우 , 얼 굴 이 좌 우 로 돌아간 경 우 의 영 상 들로서 얼굴 
영 역 이 어느 정도 정확하게 추 출 됨을 볼 수 있다. 그 
림 9(3) 의 경 우 에서는 얼굴 영 역 과 함께 목 부 분 이 


표 2. 영 상 내의 사람 수 에 따른 추출 결과 


추출한 얼굴 수 


추 출 하지 못한 
럴 물 수 


병 합 되어 추 출 되었으며, 얼 굴 이 기울어 있는 그림 10 
의 경 우 에서는 얼 굴 의 일 부 만 을 추 출 되었다. 이러한 
현 상 은 칼라 공 간 에 서 의 피부색 범 위 를 점 진 적 으로 
확 장 해 가면서 이미지 공 간 에 서 의 일단 얼굴 후보 
영 역 을 확 장 해 나가는 과 정 에서 발생한 것이다. 이러 
한 확장 과 정 에서 일단 얼굴 영 역 으로 검 증 되면, 더 
이상 확 장 하지 않고 현 재 까 지의 영 역 에 대한 외 접 
사 각 형 을 얼굴 영 역 으로 그림 9, 10 에 나 타 내 었다. 

본 연 구 에서는, 어떤 영 상 에 서 의 얼굴 존재 여부 
및 개 략 적 인 위치 정 보 를 얻는 것을 목 적 으로 하였기 
때문에, 이러한 정 도 의 정 보 를 필 요 로 하는 응 용 에서 
활용할 수 있다. 그러나, 보다 정확한 얼굴 영 역 에 
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그림 10. 기 울 어 진 얼 굴 의 실 험 결과 


대한 정 보 를 필 요 로 하는 응용 분 야 에서 활 용 하기 
위해서는, 불필요한 부 분 ( 예 , 그림 9(2) 에 서 의 목 부 
분 ) 을 배 제 하 거나 전체 얼 굴 이 나 타 나 도록 계속 확 
장해 줄 필 요 가 있다. 이러한 후 처 리 과 정 은 얼굴 검 
증 과 정 에 서 의 눈 과 입 에 대한 위 치 적 정 보 를 활 용 하 
여 해 결 이 가능할 것으로 기 대 된다. 예 를 들어, 눈 과 
입 의 위치 정 보 로 부터 얼굴 영 역 을 타 원 으로 모델링 
함으로써, 그림 9(3) 에 서 의 목 부 분 과 같은 불필요한 
부 분 을 제 거 할 수 있으며, 그림 10 에 서는 얼굴 영역 
을 보다 확 장 할 수 있다. 

그림 11 은 두 개의 얼 굴 이 존 재 하 는 영 상 의 실험 
결 과 로서 제안한 방 법 에 의해 여러 개의 얼굴 영 역 도 
잘 추 출 할 수 있 음 을 보이고 있다. 그러나, 그럼 12 는 
제안한 방 법 으로 얼굴 영 역 을 검 출 하지 못한 예 를 
보여준다. 그림 12(8) 에 서 와 같이 얼 굴 이 심하게 기 
울 어 진 경 우 에는 수평 방 향 으로 분 포 하 는 경계 화소 
들 만 으 로 는 얼굴 기 관 의 위 치 적인 정 보 를 적 용 할 수 
없기 때 문 이 다. 한편, 그림 1206) 와 같이 조명 및 화장 
에 의해 얼굴 영역 전 체 의 칼 라 가 왜 곡 된 영 상 에서는 
그림 13 에 서 보는 바와 같이 칼라 공 간 에서 얼굴 영 
역 의 칼라 분 포 가 초기 피부색 범 위 (6660 7681070 : 
영역 ㅅ &) 에 포 함 되지 않기 때문에 얼굴 영 역 을 추출 
하지 못 하 였다. 이와 같은 경 우 에는 칼라 정 보 를 기반 
으로 하는 방 법 으 로 는 얼굴 영 역 을 추 출 하기 어렵다. 

그림 12 에 서 제시된 경우 외에도, 얼굴 영 역 이 매 


09 (00) 
그림 9. 영 상 에 하 나 의 얼 굴 이 존재할 경 우 의 실 험 결과 


(3) (00) 
그림 11. 다중 얼굴 영역 추출 결과 
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그림 12. 얼굴 추 출 에 실패한 경우 


우 큰 경 우 에 추 출 이 어 려 웠 는데, 이것은 본 연구 
에셔 제 안 된 방 법 을 구 현 하 는 과 정 에서 이미지 공간 
에 서 의 확 장 을 제 한 하였기 때 문 이 다. 한편, 얼굴 영 
역 이 어느 정도 이 상 으로 큰 경 우 에는, 기 존 의 여러 
가지 방 법 을 이 용 하 여 눈 과 입 등 의 얼굴 기 관 을 정 
확 하게 추 출 할 수 있다. 이러한 정확한 정 보 를 활용 
하면, 본 연 구 에 서 와 같이 수평 경계 정 보 만을 이용 
해 눈 과 입 의 위 치 를 추 정 하는 방 법 의 단 점 인 기울어 
진 얼굴, 옆 으로 많이 회 전 된 얼굴, 너무 큰 얼굴 등에 
대한 추 출 의 어 려 움 을 극 복 할 수 있을 것이다. 즉 , 
얼굴 후보 영 역 의 크 기 에 따라 눈 과 입 과 같은 얼굴 
기 관 을 추 출 하는 방 법 을 달리 적 용 함 으로써 보다 추 
출 성 공 률 이 높은 시 스 템 을 구 축 할 수 있을 것이다. 
그러나, 제안한 방 법 은 한 영 상 에 대해 평 균 적 으로 
3 초 정 도 의 처리 시 간 을 필 요 로 한다. 따라서, 아직 
실시간 처 리 가 요 구 되는 얼굴 인식 시 스 템 을 위한 
전처리 단 계 로 활 용 하 기 에 는 곤 란 하다. 


그림 13. 그림 12(6) 의 얼굴 영 역 을 칼 라 공 간 에 나타낸 그림 


5. 결 론 


본 논 문 에서는 칼라 공 간 에 서 의 피부색 범 위 를 점 
진 적 으 로 확 장 하는 방 법 을 사 용 함 으로써 피부색 범 


위 를 미리 고 정 시켜 얼 굴 을 추 출 하는 방 법 의 단 점 올 
보 완 하 는 방 법 을 제 시 하 였다. 아울러, 얼 굴 에 대한 
간단한 모양 정 보 와 얼굴 후보 영 역 내의 수평 방향 
경계 정 보 만 을 이 용 하 여 , 얼굴 크 기 가 작아 얼굴 기 
관 을 정확하게 추 출 할 수 없는 경 우 에도 얼굴 영 역 올 
비교적 정확하게 추 출 할 수 있는 방 법 을 제 시 하 였다. 
제 안 된 방 법 은 영상 내에 포 함 된 얼 굴 의 개수 및 얼 
굴 의 크 기 에 무 관 하게 비슷한 결 과 를 보 였 으 며 , 조 
명, 잡 영 , 화 장 (202361040) 등 여러 가지 요 인 으로 왜곡 
된 색 을 가지는 얼굴 영 역 도 잘 추 출 할 수 있었다. 
또한, 피 부 색 과 유사한 배 경 이 있는 경 우 에 도 비교적 
정확하게 얼굴 영 역 만을 분 리 하 여 추 출 할 수 있었다. 
제 안 된 방 법 은 웹 에 서 의 얼굴 영상 분류 및 검색 시 
스 템 에서 활용할 수 있으며, 얼굴 인식 시 스 템 에 서 의 
전처리 과 정 으로 활 용 이 가 능 하 다. 

앞으로, 너무 크 거나 심하게 기 울 어 진 얼 굴 도 추 
출 할 수 있도록 후 처 리 과 정 을 보 완 하 는 연 구 와 칼라 
왜 곡 이 심한 얼 굴 도 칼라 보 정 [13] 을 통해 추 출 하는 
연 구 를 통해 성 능 을 높 이 고 자 한다. 
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